Người vợ đầu của ông là bà Lâm Thục Như (林淑如, Serena Castle), sinh năm 1950 trong gia đình khá giả tại huyện Miêu Lật, Đài Loan, tốt nghiệp trường Dược thuộc trường Đại học Y tế Đài Bắc. Có nhiều thông tin cho rằng bà Lâm Thục Như là con gái của ông trùm truyền thông Lâm Bách Hân và vợ hai, nhưng điều này không chính xác, con gái của tỷ phú Lâm Bách Hân cũng tên Lâm Thục Như, không phải vợ của Quách Đài Minh.[27]

Lâm Thục Như quen biết Quách Đài Minh khi ông còn làm thực tập sinh trong một nhà máy dược phẩm và kết hôn năm 1975. Họ có một con trai Quách Thủ Chính và một con gái Quách Hiểu Linh (sinh năm 1978).[28][29]

Năm 2000, bà Lâm mua một lâu đài ở Séc và đặt tên nó là "Lâu đài Serena" theo tên tiếng Anh của bà. Năm 2002, bà được chẩn đoán mắc bệnh ung thư vú. Tháng 3 năm 2005, bà được đưa vào phòng chăm sóc đặc biệt của Bệnh viện Đại học Quốc gia Đài Loan, qua đời vào ngày 12. Quách Đài Minh rất đau buồn chia sẻ: "Ông trời không công bằng với tôi!".

Lúc 10 giờ tối ngày 12 tháng 3 năm 2005, bà Lâm qua đời vì bệnh ung thư vú tại Bệnh viện Đại học Quốc gia Đài Loan ở tuổi 55 và được chôn cất tại nghĩa trang Ái Vật Viên, Tam Hạp, Đài Bắc, Đài Loan.[30].[31][32]

Em trai ông, Tony Guo qua đời năm 2007 vì bệnh bạch cầu.[33][34] Cũng trong năm đó, Hsu Ching-wei cáo buộc ông Quách ngoại tình trong thập niên 1990.[35]

Ông tái hôn với biên đạo múa Tăng Hinh Oánh (曾馨瑩; Zēng Xīnyíng; born 1974) vào ngày 26 tháng 7 năm 2008.[36] Tăng Hinh Oánh sau đó sinh được 3 người con.[37] Quách Đài Minh và vợ cam kết cho đi 90% tài sản.[38]